Можно попробовать реализовать механизм переподключений программно, на основе обработки ошибок. Но это не самый удобный/простой способ работы т.к. объект IConnection является thread safe и может быть использован несколькими потребителями. В случае ручного переподключения, придеться также обновить связанные с ним ISession, IMessageConsumer, IMessageProducer.

Даную проблему можно избежать, используяю failover.

Его использование указывается на уровне строки подключения:

Часть параметров:
1) Можно указать несколько uri, в таком случае мы получем резервные подключения. Если одно из них выйдет из строя, то приложение сможет подключитсья к другому.
2) "initialReconnectDelay" - задержка перед первой попыткой переподключения

https://activemq.apache.org/how-can-i-support-auto-reconnection
https://activemq.apache.org/failover-transport-reference